Evolution Fine-Tuning: Learning to Discover Across 371 Optimization Tasks
进化微调:跨越371个优化任务的学习发现
🧭 进化搜索LLM Agent · 跨任务迁移
University of Minnesota · Carnegie Mellon University · KAIST · University of Cambridge · Hanyang University
将进化搜索轨迹转为训练数据,让LLM学会跨任务的迭代进化改进能力
📌 工作参考价值(4 点)
- 搜索/推荐场景中的超参调优、召回策略组合优化可借鉴:将历史自动调参轨迹作为训练数据,让 LLM 预测下一步变异方向,减少试错成本。
- Agent 设计可学习“如何改进解决方案”的元能力,而非依赖外部脚手架:将搜索中的成功/失败经验注入模型,使 Agent 在新场景下快速适应。
- 多目标优化(如点击率 vs 多样性)可将帕累托搜索过程构造为轨迹数据集,微调出能直接生成改进策略的模型。
- 工程上,轨迹数据的构造需包含候选解、评分、变异操作、结果反馈,可仿照 Finch Collection 设计领域特定的搜索轨迹格式。